本发明涉及无人驾驶技术领域,具体公开了一种能准确判断是否需要人工接管的紧急事项处理系统及方法。其中系统包括,道路信息采集模块和处理模块,道路信息采集模块用于在自动驾驶模式中采集道路环境信息;处理模块用于获取道路环境信息并基于道路环境信息判断本车辆是否遭遇紧急事项;还包括:驾驶员信息采集模块,用于采集驾驶员的图像信息;处理模块还用于基于预设的条件判断紧急事项是否需要人工介入,当需要人工介入时,处理模块获取驾驶员的图像信息判断驾驶员当前状态是否符合介入条件;如果符合,处理模块退出自动驾驶模式;如果不符合,处理模块输出自动处理决策。采用本发明的技术方案能准确判断自动驾驶模式中是否需要人工接管。